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Sicherheitsvorrichtung fiir ein Fahrzeug 

Einleitung 

Die vorliegende Erfindung betrifft eine Sicherheitsvorrichtung fur ein Fahrzeug, 
insbesondere eine Vorrichtung zur Erkennung und/oder Lokalisierung von 
Objekten bzw. Personen im Bereich eines Fahrzeugs. Eine solche Vorrichtung 
kann beispielsweise in einem Passagierruckhaltesystem zur Steuerung eines 
5 oder mehrerer Airbags, in einem Komfortsystem (zum automatischen Einstellen 
von Kopfstutzen und/oder Fahrzeugsitzen und/oder RQckspiegeln, etc.) oder in 
einem System zur Unfallvermeidung eingesetzt werden. Die Erfindung betrifft 
ebenfalls ein Verfahren zur Erkennung und/oder Lokalisierung von Objekten 
bzw. Personen. 

10 Urn bei einem Verkehrsunfall die Verletzungsrisiken fur die Fahrzeuginsassen 
zu senken, werden moderne Fahrzeuge im allgemeinen mit einem aktiven 
Passagierruckhaltesystem ausgestattet. Ein solches aktives 
Passagierruckhaltesystem umfasst einen oder mehrere Airbags, die bei einem 
Aufprall des Fahrzeugs blitzschnell aufgeblasen werden und die von dem 

15 Passagier bei dem Aufprall freigegebene Energie aufnehmen, sowie 
gegebenenfalls Gurtstraffer o.a.. 

Da ein Airbag wie z.B. ein Frontalairbag mit sehr hohen Geschwindigkeiten 
(200 bis 300 km/h) aus dem Armaturenbrett bzw. dem Pralltopf des Lenkrades 
austritt, kann der Passagier, bei entsprechend ungunstiger Sitzhaltung, 

20 gegebenenfalls Verletzungen durch den ausl&senden Airbag erleiden. Urn dies 
zu vermeiden hat man mikroprozessorgesteuerte Ruckhaltesysteme mit 
mehreren Betriebsmoden entwickelt, die eine Anpassung verschiedener 
Ausloseparameter des ROckhaltesystems in Abhangigkeit u.a. der Position des 
Passagiers auf dem Fahrzeugsitz oder seiner Statur ermoglichen, wie z.B. der 

25 Aufblaszeitpunkt, die Aufblasgeschwindigkeit und/oder das Aufblasvolumen des 
Airbags. 
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Damit eine solche Anpassung- der Ausloseparameter des RQckhaltesystems 
durch den Mikroprozessor ermQglicht wird, muss dieser naturlich mit 
verschiedenen, die Sitzposition oder die Statur des jeweiligen Passagiers 
betreffenden Parametern versorgt werden. Ein derartiges 
Passagierruckhaltesystem muss folglich mit einer Vorrichtung zum Ermitteln 
eben dieser Parameter ausgerustet sein. 

Bekannte Vorrichtungen zum Ermitteln der Statur bzw. der Sitzposition eines 
Passagiers basieren beispielsweise auf der Ermittlung der Gewichtsverteilung 
des Passagiers in dem Sitz. Anhand der ermittelten Gewichtsverteilung lassen 
sich anhand statistischer Korrelationsfunktionen RuckschlQsse auf die zu 
ermittelnden Parameter Ziehen. 

Einen vollig anderen Ansatz zur Erkennung einer Sitzbelegung verfolgen 
Systeme, die mittels bildgebender Systeme eine Prasenz und gegebenenfalls 
eine Sitzposition eines Passagiers ermitteln. Bei derartigen Systemen wird der 
Iri'neriraum des Fahrzeugs mittels einer oder mehreren Kameras Qberwacht und 
das aufgenommene Videosignal mittels geeigneter Bildverarbeitungsverfahren 
ausgewertet. Durch den Einsatz modemer CCD oder CMOS Kameras mit 
hoher AuflSsung kann mit solchen Systemen eine verhaltnismafcig genaue 
Objekterkennung erreicht werden, d.h. es kann verhaltnismaBig genau 
unterschieden werden, ob der Fahrzeugsitz unbesetzt ist oder ob er durch 
einen Kindersitz oder durch einen Passagier besetzt ist. Durch die Ermittlung 
der vertikalen Position des Kopfs eines Passagiers kann daruber hinaus auf die 
Statur des Passagiers geschlossen werden. 

Zur genauen Ermittlung der Sitzposition eines Passagiers wird neben der 
zweidimensionalen Bildinformation zusatzlich eine Tiefeninformation benotigt, 
d.h. eine Information uber die Entfernung zwischen der Kamera und dem 
interessierenden Objekt (z.B. dem Kopf des Passagiers). Hierzu sind 
beispielsweise stereoskopische Verfahren bekannt, die aus zwei seitlich 
versetzt aufgenommenen Bildern eine Tiefeninformation errechnen. Eine nach 
einem solchen Verfahren arbeitende Vorrichtung ist beispielsweise aus der 
EP-A-0 885 782 bekannt. 
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Altemativ zu diesen stereoskopischen Verfahren sind Verfahren bekannt, die 
eine Unscharfe des aufgenommenen Bildes bezuglich einer Brennpunktsebene 
auswerten. Der Innenraum des Fahrzeugs wird mit einer einzelnen Kamera mit 
vergleichsweise geringer Tiefenscharfe aufgenommen. Ein Objekt, das sich in 
einer von der Brennpunktsebene verschiedenen Ebene befindet ist in dem 
aufgenommenen Bild unscharf abgebildet. Mittels geeigneter 
Bildverarbeitungsverfahren kann diese Unscharfe rechnerisch ermittelt und 
hieraus auf die Entfernung des Objekts zu der Brennpunktsebene geschlossen 
werden. Ein derartiges Verfahren ist beispielsweise in der US-A-6, 198,998 
beschrieben. 

Die beschriebenen Verfahren und Vorrichtungen liefern aufgrund der guten 
Auflosung von modemen CCD oder CMOS Kameras gute Ergebnisse bei der 
Objekterkennung. Allerdings ist die zu verarbeitende Datenmenge bei solchen 
Systemen insbesondere bei Verwendung von stereoskopischen Verfahren 
verhaltnismafcig graft. Da eine Ermittlung der Position eines Passagiers in 
Echtzeit erfolgen muss, stellen diese Systeme enorme Anforderungen an das 
bildverarbeitende System. 

Neben diesen auf der Auswertung von zweidimensionalen Aufnahmen 
beruhenden Vorrichtungen sind Systeme bekannt, die anhand einer 
Flugzeitmessung von moduliertem IR-Licht direkt eine Tiefeninformation zu der 
Bildinformation liefem. Solche 3D-Kameras sind beispielsweise aus den 
Veroffentlichungen WO-A-96/1 5626 und WO-A-98/1 0255 bekannt. Im 
Gegensatz zu den oben beschriebenen 2D-Kameras weisen 3D Kameras eine 
vergleichsweise geringe- Auflosung auf, wodurch sich die zu bearbeitende 
Datenmenge wesentlich reduziert. DarQber hinaus liegt die zur 
Positionsbestimmung des interessierenden Objekts benotigte Tiefeninformation 
unmittelbar vor. Allerdings bereitet die geringe Auflosung einer 3D-Kamera 
Probleme mit der sicheren Objekterkennung. 
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Aufgabe der vorliegenden Erfindung ist es folglich, ein verbessertes System zur 
Erkennung und Lokalisierung von Objekten vorzuschlagen. 

Ailgemeine Beschreibung der Erfindung 

Diese Aufgabe wird erfindungsgemaS gelost durch eine Vorrichtung zur 
Erkennung und Lokalisierung von Objekten umfassend 

eine 3D-Kamera zur Aufnahme von dreidimensionalen Situationsbildern eines 
zu Qberwachenden Raums; 

erste Mittel zum Auswerten der dreidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
Qberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage des 
Objekts im Raum; 

eine 2D-Kamera zur Aufnahme von zweidimensionalen Situationsbildern 
desjenigen Bereichs des zu uberwachenden Raums, in dem die Lage des 
Objekts bestimmt wurde; und 

zweite Mittel zum Auswerten der zweidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur erneuten Bestimmung des in dem 
zu uberwachenden Raum vorhandenen Objekts. 

Neben der Vorrichtung betrifft die Erfindung ebenfalls ein Verfahren zur 
Erkennung und Lokalisierung von Objekten, umfassend die Schritte: 

Aufnahme eines ersten, dreidimensionalen Situationsbildes eines zu 
uberwachenden Raums mittels einer 3D-Kamera, 

Auswerten des ersten, dreidimensionalen Situationsbildes mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
uberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage 
des Objekts im Raum; 

Aufnahme eines zweiten, zweidimensionalen Situationsbildes eines 
bestimmten Bereichs des zu Qberwachenden Raums mittels einer 2D- 
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Kamera, wobei der bestimmte Bereich dem Bereich des Raumes entspricht 
in dem die Lage des Objekts bestimmt wurde; 

Auswerten des zweiten, zweidimensionalen Situationsbildes zur erneuten 
Bestimmung des vorhandenen Objekts. 

Aiternativ wird die Aufgabe ebenfalls gelost durch eine Vorrichtung zur 
Erkennung und Lokalisierung von Objekten umfassend 

eine 3D-Kamera zur Aufnahme von dreidimensionalen Situationsbildern eines 
zu Qberwachenden Raums; 

erste Mittel zum Auswerten der dreidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
Qberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage des 
Objekts im Raum; 

eine 2D-Kamera zur Aufnahme von zweidimensionalen Situationsbildern des zu 
Qberwachenden Raums; und 

zweite Mittel zum Auswerten eines bestimmten Bereichs der zweidimensionalen 
Situationsbilder mittels geeigneter Objekterkennungsverfahren zur erneuten 
Bestimmung des in dem zu Qberwachenden Raum vorhandenen Objekts, wobei 
der bestimmte Bereich dem Bereich des Raumes entspricht in dem die Lage 
des Objekts bestimmt wurde. 

In diesem Fall umfasst das Verfahren zur Erkennung und Lokalisierung von 
Objekten die Schritte Verfahren zur Erkennung und Lokalisierung von Objekten, 
umfassend die Schritte: 

Aufnahme eines ersten, dreidimensionalen Situationsbildes eines zu 
Qberwachenden Raums mittels einer 3D-Kamera, 

Auswerten des ersten, dreidimensionalen Situationsbildes mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
Qberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage 
des Objekts im Raum; 

Aufnahme eines zweiten, zweidimensionalen Situationsbildes des zu 
Qberwachenden Raums mittels einer 2D-Kamera; 
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Auswerten eines bestimmten Bereichs des zweiten, zweidimensionalen 
Situationsbildes zur erneuten Bestimmung des vorhandenen Objekts, wobei 
der bestimmte Bereich dem Bereich des Raumes entspricht in dem die Lage 
des Objekts bestimrnt wurde. 

Die erfindungsgemaBe Vorrichtung beziehungsweise das erfindungsgemafce 
Verfahren verbinden auf vorteilhafte Weise die Vorteile bezuglich der 
Schnelligkeit und der geringen Datenmenge eines 3D-Kamerasystems mit der 
hohen Auflosung und der dadurch ermoglichten sicheren Erkennung des 
Objektes von 2D-Kamerasystemen. In der Tat wird mit der vorgeschlagenen 
Vorrichtung zunachst der gesamte zu Gberwachende Raum mit Hilfe einer 3D- 
Kamera erfasst und das hierbei gewonnene Bild im Hinblick auf eine erste 
Objekterkennung ausgewertet. Da die Auflosung einer 3D-Kamera 
verhaltnismafcig gering ist, sind die zu verarbeitenden Datenmengen 
entsprechend gering. Die gleichzeitig erhaltenen Tiefeninformationen kdnnen 
1 5 zur Positionsbestimmung unmittelbar verwendet werden. 

Anschlieftend kann mit der 2D-Kamera beispielsweise lediglich der 
interessierende Bereich des zu uberwachenden Raums, d.h. der Bereich in 
dem die Lage des Objekts bestimrnt wurde, mit Hilfe der 2D-Kamera erneut 
erfasst werden. Das dabei gewonnene zweidimensionale Bild hoher Auflosung 
wird anschlieGend im Hinblick auf eine erneute Objekterkennung verarbeitet. In 
der beschriebenen alternativen Ausgestaltung der Erfindung wird mit der 2D- 
Kamera ein zweidimensionales Bild des gesamten zu uberwachenden Bereichs 
aufgenommen aber lediglich der interessierende Bereich des Bildes 
ausgewertet. 

Die erste Objekterkennung, die auf der Basis des dreidimensionalen Bildes 
durchgefQhrt wurde, kann durch diese erneute Auswertung verifiziert werden, 
wodurch der Nachteil der geringen Auflosung des dreidimensfdnalen Bildes 
ausgeglichen werden kann. Es ist anzumerken, dass die zu verarbeitende 
Datenmenge bei der Verifizierung der Objekterkennung gegenOber einer 
herkSmmlichen Objekterkennung im Raum wesentlich verringert ist, da bei 
dieser Verifizierung entweder lediglich der interessierende Bereich des Raumes 
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erfasst und verarbeitet wird Oder lediglich der interessierende Bereich des 2D- 
Bildes ausgewertet wird. Im Vergleich zu den herkommlichen 
Objekterkennungsverfahren reduzieren beide Alternativen der Erfindung 
demnach (auf unterschiedliche Art und Weise) die bei der 2D-Objekterkennung 
5 zu verarbeitenden Datenmenge. 

Das erfindungsgemafce Verfahren zeichnet sich demnach durch eine ausserst 
schnelle Ermittlung der Position eines Objektes und eine hohe Sicherheit der 
Objekterkennung bei gleichzeitig kleinen zu verarbeitenden Datenmengen aus. 
Es ist anzumerken, dass bei der ersten Ausgestaltung der Erfindung die 
10 Einschrankung des aufgenommenen 2D-Bildbereichs auf den interessierenden 
Bereich entweder durch ein Verschwenken der 2D-Kamera oder durch eine 
Zoomfunktion der Kamera erreicht werden kann. Im Gegensatz dazu muss bei 
der zweiten Ausgestaltung die 2D-Kamera weder beweglich ausgestaltet noch 
mit einer Zoomfunktion ausgestattet sein. In der Tat kann der Aufnahmebereich 
15 der 2D-Kamera demjenigen der 3D-Kamera entsprechen, da die Reduzierung 
der zu verarbeitenden Datenmenge softwaremafcig erfolgen kann. Es wird 
lediglich der Teil des aufgenommenen Gesamtbildes verarbeitet, der das zu 
erkennende Objekt enthalt. 

Aufgrund der geringen Datenmengen sind die Anforderungen an die 
20 Prozessorleistung des Systems entsprechend gering. Dies ermoglicht 
vorzugsweise die Implementierung der ersten Mittel zum Auswerten der 
dreidimensionalen Situationsbilder und der zweiten Mittel zum Auswerten der 
zweidimensionalen Situationsbilder in einer gemeinsamen Prozessoreinheit. 
In einer vorteilhaften Ausgestaltung der Vorrichtung sind die 3D-Kamera und 
25 die 2D-Kamera unmittelbar benachbart angeordnet. Die 3D-Kamera und die 
2D-Kamera konnen beispielsweise in einem gemeinsamen Gehause 
angeordnet sein. Durch eine solche Anordnung werden Parallaxenfehler 
zwischen den aufgenommenen zweidimensionalen und dreidimensionalen 
Bildern wirksam vermieden. AuBerdem wird die Zuordnung der einzelnen 
30 Detektionsbereiche vereinfacht. 
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In einer vorteilhaften Ausgestaltung der Erfindung arbeiten die 3D-Kamera und 
die 2D-Kamera in dem gleichen Spektralbereich. Dabei arbeiten beide Kameras 
vorzugsweise mit einer gemeinsamen Lichtquelle zum Beleuchten des zu 
Qberwachenden Raums mit Licht einer in dem Spektralbereich, z.B. einem 
Infrarotbereich, enthaltenen Wellenlange. Hierdurch werden Fehler durch 
unterschiedliche Beleuchtung des zu erkennenden Objekts wirksam vermieden. 
DarQber hinaus kann der Einfluss von Fremdbeleuchtung wesentlich verringert 
werden so dass vereinfachte Algorithmen zur Bildverarbeitung eingesetzt 
werden konnen. 

Die Lichtquelle ist vorteilhaft zusammen mit der 3D-Kamera und der 2D-Kamera 
in einem gemeinsamen Gehause angeordnet. 

In einer Anwendung des oben beschriebenen Verfahrens betrifft die Erfindung 
ebenfalls ein Verfahren zur Steuerung eines RQckhaltesystems in einem 
Fahrzeug, umfassend die Schritte: 

Bestimmen eines Objekts und Ermittlung der Lage des Objekts im Bereich 
eines Fahrzeugsitzes, 

Erzeugen eines fur die Art und Position des bestimmten Objekts 
spezifischen Steuersignals und Obermitteln des Steuersignals an eine 
Steuereinheit des RQckhaltesystems; 

Auswahlen eines geeigneten Funktionsmodus des RQckhaltesystems auf 
der Basis des Qbermittelten Steuersignals. 

Die Erfindung wird in diesem Fall zur Klassifizierung einer Sitzbelegung 
eingesetzt, wobei die hohe Erkennungssicherheit des zu erkennenden Objekts, 
z.B. eines Kindersitzes oder eines Kopfes eines Fahrzeuginsassen, eine 
si'chere Klassifizierung der Sitzbelegung erkennt. Ein nach dieser Methode 
arbeitendes RQckhaltesystem kann folglich mit einer besonders geringen 
Fehlerquote in einen fur die momentan ermittelte Belegungssituation 
angemessenen Modus geschaltet werden. 

Es ist anzumerken, dass die Positionsbestimmung des Kopfes eines Insassen 
eine Berechnung der Einsitzhohe dieses Insassen ermoglicht. Eine vorteilhafte 
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Ausgestaltung des Verfahrens berucksichtigt diese H6he des Oberkorpers bei 
der Klassifizierung der Sitzbelegung. In diesem Fall umfasst die Erzeugung 
eines Steuersignals die Berechnung einer Hone eines Oberkorpers des 
Fahrzeuginsassen auf der Basis der Position des Kopfes. 

Eine weitere vorteilhafte Anwendung findet das erfindungsgemaRe Verfahren 
bzw. die erfindungsgemaRe Vorrichtung bei der Steuerung eines Precrash- 
Systems, wobei in Abhangigkeit der Art des bestimmten Objekts und seiner 
Lage im AuRenbereich des Fahrzeugs geeignete Sicherheitsmassnahmen 
eingeleitet werden. Ein solches System kann beispielsweise beim Herannahen 
des Fahrzeugs auf ein Hindernis im Frontbereich (bzw. bei RQckwartsfahrt im 
Heckbereich) ein Notbremssystem auslSsen. In einer anderen Variante kann 
beim Erkennen eines FuRgangers in unmittelbarer Nahe vor dem fahrenden 
Fahrzeug in AuRenairbag gezundet werden oder die Motorhaube des 
Fahrzeugs in eine leicht angehobene Stellung verkippt werden, urn 
Verletzungen des Fussgangers zu vermeiden oder zumindest zu verringern. 

In einer weiteren Anwendung kann die Erfindung bei der Steuerung eines 
Diebstahlwarnsystems in einem Fahrzeug eingesetzt werden. Mdglich ist auch 
der Einsatz in einem komforterhohenden System, bei der verschiedene 
Komfortfunktionen an die Einsitzhohe des jeweiligen Passagiers eingestellt 
werden. 

Es ist anzumerken, dass bei der Kombination mehrerer Anwendungen im 
Fahrzeug mehrere Kameraeinheiten an eine gemeinsame Auswerteelektronik 
angeschlossen sein konnen. So kann beispielsweise eine erste Kameraeinheit 
den Fahrzeuginnenraum zwecks Sitzbelegungserkennung iiberwachen 
wahrend eine zweite Kameraeinheit den AuRenbereich des Fahrzeugs vor dem 
Fahrzeug uberwacht und eine dritte Einheit den AuRenbereich hinter dem 
Fahrzeug. 

Beschreibung anhand der Figuren 

Im folgenden wird eine Ausgestaltung der Erfindung anhand der beiliegenden 
Figuren beschrieben. Es zeigen: 
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Fig.1: schematisch eine Anwendung des erfindungsgema&en Verfahrens zur 

InnenraumQberwachung in einem Fahrzeug; 
Fig.2: einen moglichen Aufbau einer Ausgestaltung einer erfindungsgemalien 

Vorrichtung; 

Fig.3: ein Ablaufdiagramm einer Ausgestaltung eines Verfahrens zur 

Klassifizierung eine Sitzbelegung; 
Fig.4: eine Verwendung des Verfahrens in einem Precrash-System; 
Fig.5: eine Draufsicht auf das in Fig.4 dargestellte Fahrzeug zur lllustrierung 

der Sichtfelder; 

Fig. 6: eine m8gliche Einbauvariante einer Ausgestaltung einer 

erfindungsgema&en Vorrichtung in ein Fahrzeug; 
Fig.7: eine kombinierte Vorrichtung zur AuBen- und InnenQberwachung . 

In der Fig. 1 wird schematisch der Einsatz einer erfindungsgema&en 
Vorrichtung bei der Innenraumuberwachung eines Fahrzeugs dargestellt. Eine 
Vorrichtyng 10 zum Erkennen und Lokalisieren eines Objekts ist bei einem 
solchen Einsatz beispielsweise im vorderen Bereich des Fahrzeugs unmittelbar 
unterhalb der Fahrzeugdecke angeordnet. In der dargestellten Ausgestaltung 
handelt es sich urn ein Kameramodul zur Oberwachung der Beifahrerseite, d.h. 
das Sichtfeld der Kamera ist zu der Beifahrerseite hin gerichtet. Alternativ kann 
die Vorrichtung selbstverstandlich derart angeordnet sein, dass das Sichtfeld 
des Kameramoduls zur Fahrerseite hin gerichtet ist. Je nach Anordnung und 
Ausgestaltung des Kameramoduls konnen auch beide Fahrzeugseiten und/oder 
der RQcksitzbereich des Fahrzeugs gleichzeitig uberwacht werden. 

Ein moglicher Aufbau eines Kameramoduls 10 ist in der Fig. 2 dargestellt. Es 
umfasst im wesentlichen eine 3D-Kamera 12 mit angeschlossener Elektronik 
14, eine 2D-Kamera 16 mit angeschlossener Elektronik 18 sowie eine 
geeignete Beleuchtungsquelle 20 mit zugeherigem Treiber 22. Die Kameras 
sind vorzugsweise unmittelbar benachbart zueinander angeordnet, so dass 
Parallaxenfehler zwischen den zweidimensionalen und den dreidimensionalen 
Bildern vermieden werden. Vorzugsweise sind die 3D-Kamera, die 2D-Kamera 
16 sowie die Beleuchtungsquelle 20 in einem gemeinsamen Gehause 24 . 
angeordnet, in dem weiterhin die Prozessoreinheit 26 angeordnet ist. Das 
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Modul 10 kann als vorgefertigte Einheit hergestellt werden, die beim Einbau in 
das Fahrzeug Qber eine spezifische Schnittstelle 28 an die Steuerelektronik 
eines RQckhaltesystems angeschlossen wird. 

Fig. 3 zeigt ein Ablaufdiagramm einer Ausgestaltung des erfindungsgemaflen 
Verfahrens bei der Verwendung zur Airbagsteuerung. Zunachst wird mittels der 
3D-Kamera ein dreidimensionales Bild aufgenommen und ausgewertet 100. 
Kommt diese Objekterkennung zu dem Ergebnis, dass es sich bei dem Objekt 
urn einen Kopf eines Passagiers handelt 120 wird (nach Verifizierung der 
Erkennung mit dem 2D-System 140) einerseits die Hohe des Oberkorpers 
berechnet 160 urn eine Klassifizierung des Passagiers vorzunehmen 180 und 
andererseits die Position des Kopfes verfolgt 200, um eine Bestimmung der 
Sitzposition durchzufuhren 220. 

Handelt es sich bei dem erkannten Objekt nicht um einen Kopf eines 
Passagiers sondern um einen Kindersitz 240, so wird die Sitzbelegung nach 
Verifizierung mit dem 2D-System 260 als Kindersitzbelegung klassifiziert und 
entsprechend der Airbag in einen hierfurgeeigneten Modus geschaltet. 

Die Fig. 4 und Fig. 5 zeigen den Einsatz einer Vorrichtung bei der Steuerung 
eines Precrash-Systems. An geeigneten Stellen eingebaute Kameramodule 
Qberwachen den Bereich vor bzw. hinter dem Fahrzeug um beim Herannahen 
des Fahrzeugs an ein Hindernis entsprechende Schutzmassnahmen 
einzuleiten. Auch eine Oberwachung des Bereichs seitlich des Fahrzeugs ist 
dargestellt. 

In den Figuren 6 und 7 wird ein kombiniertes Modul zur Aufcen- und 
Innensensierung sowie eine mogliche Einbauvariante in einem Fahrzeug 
dargestellt. In dem kombinierten System sind verschiedene Gruppen bestehend 
aus 3D-Kamera, 2D-Kamera und Beleuchtung an eine einzige Auswerteeinheit 
angeschlossen. Hierdurch kann eine erhebliche Platzeinsparung erreicht 
werden. 
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Patentanspruche 

1 . Vorrichtung zur Erkennung und Lokalisierung von Objekten umfassend 
eine 3D-Kamera zur Aufnahme von dreidimensionalen Situationsbildern 
eines zu uberwachenden Raums; 

erste Mittel zum Auswerten der dreidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
uberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage 
des Objekts im Raum; 

eine 2D-Kamera zur Aufnahme von zweidimensionalen Situationsbildern 
desjenigen Bereichs des zu uberwachenden Raums, in dem die Lage des 
Objekts bestimmt wurde; und 

zweite Mittel zum Auswerten der zweidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur emeuten Bestimmung des in 
dem zu uberwachenden Raum vorhandenen Objekts. 

2. Vorrichtung zur Erkennung und Lokalisierung von Objekten umfassend 
eine 3D-Kamera zur Aufnahme von dreidimensionalen Situationsbildern 
eines zu uberwachenden Raums; 

erste Mittel zum Auswerten der dreidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
uberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage 
des Objekts im Raum; 

eine 2D-Kamera zur Aufnahme von zweidimensionalen Situationsbildern 
des zu uberwachenden Raums; und 

zweite Mittel zum Auswerten eines bestimmten Bereichs der 
zweidimensionalen Situationsbilder mittels geeigneter 

Objekterkennungsverfahren zur emeuten Bestimmung des in dem zu 
uberwachenden Raum vorhandenen Objekts, wobei der bestimmte Bereich 
dem Bereich des Raumes entspricht in dem die Lage des Objekts bestimmt 
wurde. 
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3. Vorrichtung nach Anspruch 1 oder 2, wobei die ersten Mittel zum 
Auswerten der dreidimensionalen Situationsbilder und die zweiten Mitte! 
zum Auswerten der zweidimensionalen Situationsbilder in einer 
gemeinsamen Prozessoreinheit implementiert sind. 

4. Vorrichtung nach einem der Anspriiche 1 bis 3, wobei die 3D-Kamera und 
die 2D-Kamera unmittelbar benachbart angeordnet sind. 

5. Vorrichtung nach Anspruch 4, wobei die 3D-Kamera und die 2D-Kamera in 
einem gemeinsamen Gehause angeordnet sind. 

6. Vorrichtung nach einem der AnsprQche 1 bis 5, wobei die 3D-Kamera und 
die 2D-Kamera in dem gleichen Spektralbereich arbeiten. 

7. Vorrichtung nach Anspruch 6, umfassend eine Lichtquelle zum Beleuchten 
des zu uberwachenden Raums mit Licht einer in dem Spektralbereich 
enthaltenen Wellenlange. 

8. Vorrichtung nach einem der Anspriiche 6 oder 7, wobei der Spektralbereich 
einen Infrarotbereich umfasst. 

9. Vorrichtung nach Anspruch 6, wobei die 3D-Kamera, die 2D-Kamera und 
die Lichtquelle in einem gemeinsamen Gehause angeordnet sind. 

10. Verfahren zur Erkennung und Lokalisierung von Objekten, umfassend die 
Schritte: 

a) Aufnahme eines ersten, dreidimensionalen Situationsbildes eines zu 
uberwachenden Raums mittels einer 3D-Kamera, 

b) Auswerten des ersten, dreidimensionalen Situationsbildes mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem 
zu Uberwachenden Raum vorhandenen Objekts und zur Bestimmung 
der Lage des Objekts im Raum; 

c) Aufnahme eines zweiten, zweidimensionalen Situationsbildes eines 
bestimmten Bereichs des zu uberwachenden Raums mittels einer 2D- 
Kamera, wobei der bestimmte Bereich dem Bereich des Raumes 
entspricht in dem die Lage des Objekts bestimmt wurde; 
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d) Auswerten des zweiten, zweidimensionalen Situationsbildes zur 
erneuten Bestimmung des vorhandenen Objekts. 

11. Verfahren zur Erkennung und Lokalisierung von Objekten, umfassend die 
Schritte: 

a) Aufnahme eines ersten, dreidimensionalen Situationsbildes eines zu 
uberwachenden Raums mittels einer 3D-Kamera, 

b) Auswerten des ersten, dreidimensionalen Situationsbildes mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem 
zu uberwachenden Raum vorhandenen Objekts und zur Bestimmung 
der Lage des Objekts im Raum; 

c) Aufnahme eines zweiten, zweidimensionalen Situationsbildes des zu 
uberwachenden Raums mittels einer 2D-Kamera; 

d) Auswerten eines bestimmten Bereichs des zweiten, zweidimensionalen 
Situationsbildes zur erneuten Bestimmung des vorhandenen Objekts, 
wobei der bestimmte Bereich dem Bereich des Raumes entspricht in 
dem die Lage des Objekts bestimmt wurde. 

12. Verfahren nach Anspruch 10 oder 11, wobei die 3D-Kamera und die 2D- 
Kamera in dem gleichen Spektralbereich arbeiten. 

13. Verfahren nach Anspruch 12 umfassend den Schritt des Ausleuchtens des 
zu uberwachenden Raums mit Licht einer in dem Spektralbereich 
enthaltenen WellenlSnge. 

14. Verfahren nach einem der Anspriiche 12 oder 13, wobei der 
Spektralbereich einen Infrarotbereich umfasst. 

15. Verfahren zur Steuerung eines Riickhaltesystems in einem Fahrzeug, 
umfassend die Schritte: 

a) Bestimmen eines Objekts und Ermittlung der Lage des Objekts im 
Bereich eines Fahrzeugsitzes nach einem Verfahren gemass einem der 
Anspriiche 10 bis 14, 
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b) Erzeugen eines fur die Art und Position des bestimmten Objekts 
spezifischen Steuersignals und Obermitteln des Steuersignals an eine 
Steuereinheit des ROckhaltesystems; 

c) Auswahlen eines geeigneten Funktionsmodus des ROckhaltesystems 
auf der Basis des Obermittelten Steuersignals. 

16. Verfahren nach Anspruch 15, wobei das Objekt einen Kindersitz umfasst. 

17. Verfahren nach Anspruch 15, wobei das Objekt den Kopf eines 
Fahrzeuginsassen umfasst. 

18. Verfahren nach Anspruch 17, wobei die Erzeugung eines Steuersignals die 
Berechnung einer Hohe eines Oberkorpers des Fahrzeuginsassen auf der 
Basis der Position des Kopfes umfasst. 

19. Verwendung einer Vorrichtung nach einem der AnsprOche 1 bis 9 bei der 
Steuerung eines ROckhaltesystems in einem Fahrzeug, wobei das 
ROckhaltesystem in AbhSngigkeit der Art des bestimmten Objekts und 
seiner Lage im Innenraum des Fahrzeugs in einen geeigneten 
Funktionsmodus geschaltet wird. 

20. Verwendung einer Vorrichtung nach einem der AnsprOche 1 bis 9 bei der 
Steuerung eines Precrash-Systems, wobei in AbhSngigkeit der Art des 
bestimmten Objekts und seiner Lage im AuSenbereich des Fahrzeugs 
geeignete Sicherheitsmassnahmen eingeleitet werden. 

21. Verwendung einer Vorrichtung nach einem der AnsprOche 1 bis 9 bei der 
Steuerung eines Diebstahlwarnsystems in einem Fahrzeug. 
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Zusammenfassung 

Eine Vorrichtung zur Erkennung und Lokalisierung von Objekten umfasst 

eine 3D-Kamera zur Aufnahme von dreidimensionalen Situationsbildern eines 

zu uberwachenden Raums; 

erste Mittel zum Auswerten der dreidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur Bestimmung eines in dem zu 
uberwachenden Raum vorhandenen Objekts und zur Bestimmung der Lage des 
Objekts im Raum; 

eine 2D-Kamera zur Aufnahme von zweidimensionalen Situationsbildern 
desjenigen Bereichs des zu uberwachenden Raums, in dem die Lage des 
Objekts bestimmt wurde; und 

zweite Mittel zum Auswerten der zweidimensionalen Situationsbilder mittels 
geeigneter Objekterkennungsverfahren zur erneuten Bestimmung des in dem 
zu uberwachenden Raum vorhandenen Objekts. 

(Fig. 2) 
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